聴覚的な表示のための装置及び方法

专利摘要:
複数のスピーカー（２２０）が、該スピーカー（２２０）をさまざまに駆動することによって異なる空間的位置を聴覚によって示すことができるように空間的に異なる位置に配置されている再現空間（２１０）において、物体（２００）の位置を聴覚的に表示するための装置（１００）が、信号関連付け手段（１１０）と、スピーカー駆動手段（１２０）とを備えている。信号関連付け手段（１１０）は物体（２００）に聴覚信号を関連付けるように構成されている。スピーカー駆動手段（１２０）は複数のスピーカー（２２０）のための１又は２以上のスピーカー信号（ＬＳ）を生成するように構成されており、物体（２００）の位置を表示するための１又は２以上のスピーカー信号（ＬＳ）は、信号関連付け手段（１１０）によって物体（２００）へと関連付けられた聴覚信号にもとづく。１又は２以上のスピーカー信号（ＬＳ）を再生したときに再現空間（２１０）内に物体（２００）の位置が聴覚的に表示されるように１又は２以上のスピーカー信号（ＬＳ）を生成することができる。
公开号:JP2011516830A
申请号:JP2011500111
申请日:2009-03-17
公开日:2011-05-26
发明作者:トーマス・スポレル
申请人:フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン；
IPC主号:G01S7-56

专利说明:

[0001] 本発明は、再現空間に物体の位置を聴覚的に表示するための装置及び方法に関する。特に、実施の形態は、船舶に搭載されて使用される聴覚的な表示を含む。]
背景技術

[0002] 中型及び大型の船舶の艦橋又は機械操作センターにおいて、一方では船舶の技術的設備を監視し、他方では水上及び水中の環境（特に、障害物）についての情報を提供する多数の視覚的表示（例えば、センサーなどの）が頻繁に見かけられる。通常は、数名の者が、船舶を制御するために艦橋又は操作センターに存在している。情報をもたらすセンサーの数が増すにつれて、例えば警報と情報を区別しなければならないような、区別可能な信号を生成することがますます重要になってきている。視覚的表示の他に、聴覚による情報提示が特に望ましい。まれにしか生じない通知はスピーチ出力によって支援することが可能であるが、例えばレーダー装置又はソナーによってもたらされるような頻繁に生じる通知をアナウンスによって伝えることは、はるかに複雑である。自動車分野からの従来技術として、種々の周波数のビープ音を再生する間隔センサーが考えられる。好ましい例としては、距離が減少するように障害物に近付くときに周波数を変化させることができる。しかしながら、これは、船舶においては、可動の障害物が存在して、任意の方向に移動する可能性があるため、充分な情報をもたらさない。]
発明が解決しようとする課題

[0003] この従来技術から出発して、本発明は物体の位置を聴覚的に表示する装置及び方法を提供するという目的にもとづく。]
課題を解決するための手段

[0004] この目的は、請求項１又は１８に記載の装置、及び請求項２０に記載の方法によって達成される。]
[0005] 本発明の中心にある考え方は、複数のスピーカーをさまざまに駆動することによって異なる位置を聴覚によって示すことができるように、それらのスピーカーを空間的に異なるように再現空間に配置することにある。特に、信号関連付け手段が聴覚信号を物体へと関連付けるように構成され、スピーカー駆動手段が複数のスピーカーのための１又は２以上のスピーカー信号を生成するように構成される。１又は２以上のスピーカー信号は、物体の位置を表示するようなスピーカー信号であり、信号関連付け手段によって物体へと関連付けられた聴覚信号に基づいている。１又は２以上のスピーカー信号は、その１又は２以上のスピーカー信号を再生したときに再現空間内に物体の位置が聴覚的に表示されるように決められる。]
[0006] 本発明の実施の形態は、さらに、インテリジェントな聴覚的表示を使用して、どのようにしてセンサー信号をより容易に表現することができ、したがってどのようにして安全を向上させることができ、諸経費を減らすことができるのかに関する。本発明の別の考え方は、上記の情報のかなりの部分が多数の報告装置における位置の表示であるという事実にもとづく。例えば、レーダー、ソナー、海図又は天気図を報告装置として使用することができ、その場合の位置の表示は、好ましい例としては、方向又は物体までの距離に関する。その方向又は距離を報告又は表示するように、例えば、この情報を可能な限り正確に自然にエンコードする音場がいくつかのスピーカーによって生成される。]
[0007] これまでに使用されているレーダー及びソナーの視覚的表示と協働する場合、環境を聴覚によって示すときに、最も重要な物体又は重要な物体だけを補うことが現実的である。それらは、例えば、接近する物体又は針路が船舶の針路と交差する物体で、衝突の危険につながると考えられる物体である。]
[0008] 娯楽の分野及び仮想現実の分野における空間オーディオ信号のための再現システムに基づき、小さな空間においても、物体の位置（距離及び方向）を再現空間の外側でも正確に聞き取ることができるように壁を仮想的に消失させることができる。]
[0009] 基本的に、スピーカーを駆動する２つのやり方が存在する。]
[0010] （ｉ）波面合成（ＷＦＳ）：
このシステムにおいては、複数のスピーカーが、好ましい例として、一定の距離に位置しており、それらのスピーカーのための個々の信号が公知のＷＦＳアルゴリズムに従って計算される。ここでは、物体はレーダー信号からの対応する方向及び距離の音響物体として再現される。物体が仮想の音源として現れ、聴取者が位置を認識することができる。艦橋のすべての者が、好ましい例としては、同じ位置に物体を知覚することができる。単一の物体だけでなく、いくつかの物体を同時に聴覚的に表示することも可能であり、その場合には、別の聴覚信号（又は、例えば、等しい聴覚信号であってもよい。）を各々の物体に関連付けることができる。]
[0011] （ｉｉ）時間及び振幅パンニング（ＴＡＰ）：
この方法においては、個々のスピーカーについての聴覚信号の振幅及び位相が、その聴覚信号が特定の方向から到来して特定の距離にあるように聞こえるように変化させられる。このシステムによれば、スピーカー間に、より大きな距離及び／又は異なる距離を許すことも可能である。この方法は、ＷＳＦと比べて必要とされるスピーカーが少ない点で有利であるが、音源の音響位置の知覚の正確さが劣る点で不利である。さらには、知覚される音源の位置が聴取者の位置に多少は依存する可能性がある。]
[0012] レーダー信号を聴覚的に示すために、レーダー信号が最初に聴覚的に処理される。ここで、その処理は、一方では船舶及び航空機などの可動の物体を認識することを含み、例えば海岸線、ブイ又は島などの静止の物体をさらに認識することを含む。トランスポンダーを含み、テキスト（テキストメッセージ又は一般的にはデータ）によって特定される物体においては、トランスポンダーのテキスト信号を聞き取ることができるように、そのオーディオ信号を、テキスト−トゥ−スピーチ識別によって１つのオーディオ信号へ随意に変換することができる。そのような物体は、例えば、特定のブイ又はビーコンであり、その特定可能情報が、好ましい例としては、テキストとしてレーダー上に現れる。]
[0013] 物体を、それらの危険度に応じて分類することも可能である。好ましい例としては、接近（前方から、又は後方からより高速で）する物体、又は船舶の移動の経路を横切る物体を、船舶に対して平行に通過する物体又は船舶から離れるように移動する物体よりも危険であると分類することができる。遠方にある物体は、通常は、近くの物体又は大きな相対速度で近付きつつある物体よりも危険が少ないと考えられる。危険に応じて、異なる識別の音色を物体と組み合わせることができ、そのような識別の音色は、好ましい例としては、ピッチ又はインパルスの連続の周波数において相違させ、危険の高まりにつれて増加させることができる。したがって、より高い音色が危険度のより高いことを示すことができ、又は音量の増加が危険度の高まりを意味することができる。同様に、速いビートのクロックインパルスが、遅いクロックインパルスと比べて、危険度の高まり又は危険度がより高いことを示すことができる（好ましい例として、識別の音色が周期的なクロックインパルスとして表わされる場合。）。]
[0014] 次いで、このやり方で生成される物体のオーディオ信号が、好ましい例としては、遠方の物体の音量が自動的に小さくなる上述のＷＦＳ又はＴＡＰによって再現される。]
[0015] さらなる実施の形態においては、特に例えば航路などの環境において、操船者又は聴取者を過剰な情報によって緊張させることがないように、危険でない物体が完全に消し去られる（再現されない）。]
[0016] さらに、再現の位置が、いくつかの実施の形態においては、実際の距離と同じ距離に現れることができる。すなわち、レーダーが物体が１キロメートルの距離にあると示すときに、聴覚による物体も、１キロメートルの距離に知覚可能である（１：１の写像）。あるいは、例えば１：１００の写像が実行され、１キロメートルの距離にある物体が、約１０メートルの距離にある聴覚信号（仮想の音源）によって聴覚的に知覚可能又は再現されるように、再現の位置が相応に拡大縮小される。前者（１：１の写像）は、例えば、ＷＦＳにおいていかなる視差も存在せず、物体の距離が、もはや湾曲した波形によってエンコードされず、音量によってのみエンコードされる点で好都合である。しかしながら、大きな距離にある物体は、音の速度の結果として、きわめて遅くでなければ聞き取ることができず、さらには、１：１の表現においては、大きな距離にある物体を距離に関して区別することが困難である。]
[0017] いくつかの実施の形態は、物体を、可能な限り最良のやり方で位置特定できるように、オーディオ信号を使用してエンコーディングすることを目的とする。これを達成するために、オーディオ信号は、例えば正弦曲線の音色は知覚が困難であるため、充分に広帯域でなければならない。したがって、正弦曲線の音色でなく、狭帯域の雑音又はスピーチが、物体を特定するために使用されるべきである。例えば航路などの密な環境において多数の物体を再現でき、さらには聴覚的に知覚もできるようにするために、連続的な信号（例えば、連続的な音色など）の代わりにパルス状の信号が発せられる。ここで、自動車の駐車センサーと同様に、危険度の高まりにつれてパルスの周波数を高めることができる。常用を可能にするために、危険度が充分に低い限りは、オーディオ信号は心地良い音を発するべきである。危険度のしきい値（これを上回る場合、深刻な危険が存在し、これを下回る場合、危険が皆無又はほとんど存在しない。）を、好ましい例としては、状況に応じて可変に設定することができる。危険度のしきい値は、ユーザーにより調節可能とすることもできる。例えば、船舶のサイズ及び速度、又は他の物体の速度も、その役割を果たす。しきい値は、好ましい例としては、あらかじめ計算される衝突までの時間と船舶の停止時間との比から決めてもよい。]
[0018] オーディオ信号の心地良い音は、好ましい例としては、非特定の物体（例えば、危険を呈していない物体）については狭帯域の雑音の低い中心周波数を使用することによって、又は低いパルス周波数（まれな表示）を使用することによって達成することができる。あるいは、高い周波数が低い周波数よりもエネルギーが少ない狭帯域の雑音のスペクトル的な着色を使用することもできる（ピンク雑音からの帯域通過を使用した切除）。これは、特定された物体について、例えば最初の接触から数分の間隔でのみ新たな信号を送信するなど、まれな報告によって達成される。]
[0019] 報告信号を、随意により、正確に位置特定することができかつ周囲の雑音から区別されるように選択することができる。さらには、システムが長旅においても常に受け入れられるように、報告信号が心地良い音を有することが好都合である。空間分解能を含む聴覚的な表示の特筆すべき利点は、視覚的な表示と対照的に、自然の環境と同時に人員に利用できる点にある。自然の環境として、典型的には、視覚による航海又は船舶及びブイを聞くことが挙げられる。これは、いわゆる拡張現実の生成を可能にする。]
[0020] いくつかの実施の形態は、特に聴覚的な表示と視覚的な表示との間の重要な相乗効果をもたらすため、好都合である。聴覚的な表示は、常に報告及び知覚されるため、危険度に応じた優先順位付けを行うことができる一方で、視覚的な表示は、艦橋にいる者の注意を必要とする。例えば、操船者は、レーダー画面を眺めるとき、レーダー画面上の物体だけを見つめるが、同時に窓の外を眺めることがなく、したがって付近の環境において何が生じているかについての情報の一部を失う。聴覚的な表示によれば、レーダーからの情報及び窓の外を見つめることによる情報を同時に使用することができる。特に、自動識別でない物体において、熟練の評価者は、レーダー画像から物体を（例えば、船舶、島、又は画像の干渉であると）分類することができる。したがって、聴覚による知覚（物体が存在すること。）とレーダー画面を見つめることとの協働は、操船のための重要な相乗効果である。遠い距離にある自動識別の物体においては、その識別をレーダー画面を見つめることによっていつでも読み取ることができる。]
[0021] 本発明の実施の形態を、添付の図面を参照して以下で詳しく説明する。]
図面の簡単な説明

[0022] 本発明の実施の形態による聴覚的な表示のための装置の概略図を示している。
物体の位置を割り出すためのセンサーを備えている本発明のシステムの図を示している。
危険度の高まりを聴覚によって知覚するための位置依存の信号の図を示している。
危険度の高まりを聴覚によって知覚するための位置依存の信号の図を示している。
２つの別々の物体の聴覚的な表示について、複数のスピーカーを備えている実施の形態を示している。
ＷＦＳモジュールを備える再現空間の概略図を示している。
波面合成モジュール及び再現空間内のスピーカーアレイを備えている波面合成システムの基本的なブロック図を示している。]
実施例

[0023] 以下の説明に関して、同じ機能要素又は同じ効果を有する機能要素が異なる実施の形態においても同じ参照番号を備えており、したがって、下記に示される種々の実施の形態におけるこれらの構成要素の説明が相互に入れ換え可能であることを忘れてはならない。]
[0024] 図１は、入力部１０５を備えている聴覚的な表示のための装置１００の概略図を示しており、入力部１０５によって物体の位置情報を装置１００へ入力することができる。さらに、装置１００は、複数のスピーカー信号ＬＳ（典型的には、第１のスピーカー信号ＬＳ１、第２のスピーカー信号ＬＳ２、第３のスピーカー信号ＬＳ３、・・・、第ｎのスピーカー信号ＬＳｎ）のための出力部を備えている。位置情報の入力部１０５は、それぞれの位置を含む物体を信号関連付け手段１１０へ知らせるように構成されている。信号関連付け手段１１０は、聴覚信号を物体と関連付けるように構成されており、信号関連付け手段１１０は、随意により信号データベース１４０へアクセスして、種々の信号を（好ましい例としては、各信号の危険度を使用して）種々の物体と関連付ける。関連付けされるそれぞれの信号を、好ましい例としては、物体が動いているか又は静止しているか、動いているならばどのような速度で動いているか、に応じて決めることができる。] 図１
[0025] さらに、装置１００はスピーカー駆動手段１２０を備えており、スピーカー駆動手段１２０は、信号関連付け手段１１０から物体の位置及び聴覚信号を受信し、それらから複数のスピーカーのための１又は２以上のスピーカー信号ＬＳを生成して、スピーカー信号ＬＳ１、・・・、ＬＳｎのための出力部を介して出力する。スピーカー駆動手段１２０は、物体と関連付けられた聴覚信号に基づいて１又は２以上のスピーカー信号ＬＳを生成するように構成されている。スピーカー信号ＬＳの生成は、この１又は２以上のスピーカー信号ＬＳの再生時に、物体の位置が再現空間内に聴覚的に表示されるように行われる。聴取者（又は、ユーザー）が、物体の位置（例えば、距離及び方向）を、仮想の音源の位置として知覚する。]
[0026] すでに述べたように、一実施の形態は、物体の位置を決めるレーダーの情報の再現に関する。レーダーに加え、あるいはレーダーに代えて、ソナーなどの他のソース又は他のセンサーからの情報も同様に処理することができる。この実施の形態は、さらに詳しくは好ましい例として後述されるが、好ましい例としては、スピーカーを船舶の艦橋のすべての壁の窓の下方に配置することができる（さらには、窓の上方にも配置することができる。）。好ましい例としては、これらのスピーカーのすべてが、自身の増幅器、又はＡ／Ｄ（アナログ−デジタル）トランスデューサーもしくは変換器を備えることができ、さらには、これらのスピーカーを個別に駆動することができる。艦橋にいる者をスピーカーによって可能な限り完全に囲むことができると特に好都合である。その場合、民間の航海においては、平面的な囲み（円）が有用であり、又は目標とされ、軍事用においては、三次元の囲み（半球）も有用であり、又は目標とされる。ここで、囲みは完全である必要はなく、例えばドアによって生じうる囲みのより小さいすき間も可能であると考えられる。]
[0027] 図２は、３つのスピーカー２２０ａ、２２ｂ及び２２０ｃと、レーダー２３０とを備えている再現空間２１０の概略図を示している。レーダー２３０は入力部１０５へ接続され、再現空間２１０の周囲の物体の位置情報をもたらす。好ましい例としては、レーダー２３０は、物体２００の位置を聴覚的に表示するための装置１００に伝えるように構成されている。さらに、３つのスピーカー２２０ａ、２２０ｂ、２２０ｃが聴覚的な表示のための装置１００のスピーカー信号ＬＳの出力部へ接続されている。具体的には、第１のスピーカー２２０ａが第１のスピーカー信号ＬＳ１の出力部へ接続され、第２のスピーカー２２０ｂが第２のスピーカー信号ＬＳ２の出力部へ接続され、第３のスピーカー２２０ｃが第３のスピーカー信号ＬＳ３の出力部へ接続されている。] 図２
[0028] 聴覚的な表示のための装置１００は、レーダー２３０から受信される物体２００の位置情報を評価し、それから第１、第２及び第３のスピーカー２２０ａ、２２０ｂ、２２０ｃのための３つのスピーカー信号ＬＳ１、ＬＳ２、ＬＳ３を生成する。スピーカー信号ＬＳ１、ＬＳ２、ＬＳ３の生成は、再現空間２１０内での好ましい例としての位置Ｐに位置する聴取者が物体２００の位置を聞き取ることができるような方法で行われる。最初に、装置１００は、物体２００の位置に基づいて物体２００についての聴覚信号を生成する。位置は距離ｄ及び方向によって決定され、方向は好ましい例としては角度αを使用して示すことができる。次いで、装置１００は、第１から第３のスピーカー２２０ａ〜２２０ｃのためのスピーカー信号ＬＳを計算する。これは、好ましい例としては、位置Ｐの聴取者がその聴取者の位置に応じて物体２００を知覚するように、信号レベルを上げ下げすること及び信号を遅延させることを含むことができる。これを、図２に示した実施の形態においては、好ましい例としては、第３のスピーカー２２０ｃが最も強い信号をもたらし、一方、第１のスピーカー２２０ａが弱い信号しかもたらさず、第２のスピーカー２２０ｂがいかなる信号ももたらさないように行うことができる。] 図２
[0029] さらに、図２に示したレーダー２３０を、好ましい例としては、水中の地形を走査して浅瀬の存在の可能性を知らせるソナーに組み合わせることができ、その場合にはそのような浅瀬も聴覚的に表現することができる。すでに述べたように、区別の目的のために、異なる物体（水上、水中又は地上の物体）に対して異なる聴覚信号を組み合わせることができる。] 図２
[0030] 図３Ａ及び３Ｂは、物体の距離及び物体の距離に関係する危険度に依存した聴覚信号の考えられる変形例を示している。] 図３Ａ
[0031] 図３Ａは、信号の周波数ｆが物体２００の距離ｄに依存することを示している。物体が充分な距離にある限り、危険はまったく存在せず、あるいはわずかにしか存在しない。しかしながら、物体が過度に近付き、典型的には限界距離ｄcを下回ると、操船者のさらなる注意を必要とする高い危険が存在する。この危険のない状況から危険な状況への移行が、好ましい例としては、聴覚信号の変化にて知らされる。好ましい例としては、距離が限界距離ｄcよりも大きい場合、信号の周波数ｆは基本周波数ｆ0に近くてよく、あるいは基本周波数ｆ0をわずかに上回るだけでよく、この方法で定められる周波数範囲が操船者によって危険でないと知覚される。しかしながら、物体の距離が限界距離ｄcを下回るほどに減少する場合には、聴覚信号の周波数ｆを、操船者に危険の高まりを知らせるように強く、急激に高めることができる。] 図３Ａ
[0032] 周波数の増加は、操船者が連続的に高まる危険度を知覚できるように、限界距離において急激に変化させないで物体の距離の減少につれて単調に増加させてもよい。]
[0033] このように、聴覚信号もしくは聴覚信号の周波数ｆが、一方では、オーディオ周波数を含むことができ、又は例えば聴覚信号が特定のクロックを特定の周波数（クロックの反復速度）にて示す場合にはクロック周波数を含むこともできる。クロック信号においても、クロック周波数を、危険度の高まりを操船者が聴覚によって知覚できるように、距離の減少につれて増加させることができる。]
[0034] 図３Ｂは、信号レベルＳが時間ｔの関数として表わされる実施の形態を示している。この実施の形態においては、接近する物体を知らせるべくクロック周波数が増加するように、隣接する２つのクロックの間の間隔が時間の経過につれて減少している。同時に、クロックの間隔の減少を、信号パルスの音量の増加及び／又は信号パルスの周波数の変化と組み合わせることができる。信号の変化は、好ましい例としては、やはり危険度の高まりが信号パルスの周波数レベル又はオーディオ周波数において知覚可能になるように、中心周波数をより高い周波数に向かってずらすことを含むことができる。同時に、図３Ｂに示されるように、信号の振幅又は音量も、危険度の高まりにつれて増加させることができる。] 図３Ｂ
[0035] 一般に、危険のない状態においては、操船者が聴覚信号によって邪魔されることがないように、聴覚信号がほとんど知覚できないことが好都合である。]
[0036] 図４は、複数のスピーカー２２０が、第１のスピーカー２２０ａ、・・・、第４のスピーカー２２０ｄ、・・・、第９のスピーカー２２０ｉ、・・・、第１２のスピーカー２２０ｌを含んでいる実施の形態を示している。物体２００の位置又は物体２００の方向がただ１つのスピーカーを作動させるだけで知覚可能になるように、スピーカー２２０が聴取者の位置Ｐの周囲に配置されている。この実施の形態においては、作動しているスピーカーの位置がこのときの物体２００の方向に対応する。これは、位置Ｐが再現空間２１０において固定される場合に特に好都合である。] 図４
[0037] 好ましい例としては、図４に示されるように、２つの物体、すなわち聴取点Ｐから距離ｄ１にある第１の物体２００ａ及び距離ｄ２にある第２の物体２００ｂを、第１の音信号Ｓ１を生成する第４のスピーカー２２０ｄ及び第２の音信号Ｓ２を生成する第９のスピーカー２２０ｉによって知覚することができる。これにより、位置Ｐの聴取者が、第１の物体２００ａ及び第２の物体をそれらの位置に対応して知覚する。好ましい例としては、それぞれの物体と位置Ｐとの間の接続線に対して最も小さい距離を有するスピーカーが作動するスピーカーとして選択される。これが、第１の物体２００ａについては第４のスピーカー２２０ｄであると考えられ、第２の物体２００ｂについては第９のスピーカー２２０ｉであると考えられる。残りのすべてのスピーカーは、それぞれの接続線からさらに遠く（垂直な距離として測定される。）、この実施の形態においては、好ましい例としては、作動させなくてよい（音信号を発しない。）。] 図４
[0038] あるいは、間を第１の物体２００ａと位置Ｐとの間の接続線が通過している隣り同士のそれぞれのスピーカーを作動させることも可能である。さらには、さらなる隣接のスピーカーも作動させることが可能である。これは、好ましい例としては、さらなる実施の形態において、第４のスピーカー２２０ｄだけでなく、同時に第３のスピーカー２２０ｃ及び／又は第２のスピーカー２２０ｂ、及び／又は第５のスピーカー２２０ｅを作動させてもよいことを意味する。しかしながら、複数の物体２００のうちの１つの位置を示すために同時に複数のスピーカーが作動する場合には、それぞれの位置の物体２００が位置Ｐの聴取者にとって聴覚によって知覚可能になるように、振幅／位相が選択される。ここで、聴覚によって知覚可能とは、物体２００が仮想の音源として知覚され、距離を、音の大きさの他に、クロック周波数又はオーディオ周波数の相違によっても知らせることができる（図３Ａ、Ｂに好ましい例として示したとおり）ことを意味する。] 図３Ａ
[0039] 図５は、聴覚的な表示のための装置１００が第１のスピーカーアレイ２２１ａ、第２のスピーカーアレイ２２１ｂ及び第３のスピーカーアレイ２２１ｃを駆動する波面合成（wave field synthesis）システムにスピーカーが配置されている実施の形態を示している。好ましい例としては、３つのスピーカーアレイ２２１ａ、２２１ｂ、２２１ｃの各々は、好ましい例として互いに所定の空間距離にある複数のスピーカーを含んでいる。好ましい例としては、再現空間２１０の横壁に配置される３つのアレイが、物体２００を再現空間２１０内に仮想の音源として生成するであろう波面を合成するように、装置１００はそれぞれのアレイ内のすべてのスピーカを別個独立に駆動できるように構成されている。次に、装置１００を、それぞれの物体の位置を装置１００へ伝えるレーダー又はソナー２３０へ接続することができる。物体そのものは音源である必要はなく、むしろ音信号が物体に特別に関連付けられる。この点に関して、実施の形態による聴覚的な表示は、従来からのオーディオ再現システムとは相違する。] 図５
[0040] ＷＦＳシステムの設定は、通常はきわめて複雑であり、波面合成に基づいている。波面合成は、複雑なオーディオ場面を空間的に再現するためにデルフト工科大学（Technical University of Delft）によって開発されたオーディオ再現法である。大部分の既存のオーディオ再現の方法と対照的に、空間的に正しい再現が小さな領域に限定されず、広い再現領域の全体へと広がる。ＷＦＳは、確立された数学−物理学的原理、すなわちホイヘンスの原理とキルヒホフ−ヘルムホルツの積分に基づいている。]
[0041] 典型的には、ＷＦＳ再現システムは、多数のスピーカー（いわゆる、二次音源）を備えている。スピーカー信号は、遅延及び強弱の調節が行われた入力信号から形成される。典型的には、ＷＦＳ場面においては、典型的に多数のオーディオオブジェクト（一次音源）が使用されるため、スピーカー信号を生成するためにきわめて多数のそのような演算が必要である。このことが波面合成には大きな演算能力を必要としている。]
[0042] 上述の利点の他に、ＷＦＳは移動している音源を写実的に写像する方法を提供する。この特徴は、多数のＷＦＳシステムにおいて利用され、例えば映画、仮想現実の用途、又は実演における使用に関して大いに重要である。]
[0043] しかしながら、移動している音源の再現は、静止の音源の場合には生じないいくつかの特徴的な誤差を引き起こす。ＷＦＳ再現システムの信号処理は、再現の品質に大きな影響を有する。]
[0044] １つの主要な目標は、移動している音源をＷＦＳによって再現するための信号処理アルゴリズムの開発である。したがって、アルゴリズムがリアルタイムであることが重要な必須条件である。アルゴリズムを評価するための最も重要な基準は、実際に知覚されるときのオーディオ品質である。]
[0045] すでに述べたように、ＷＦＳは、演算リソースに関してきわめて複雑なオーディオ再現のための方法である。これは、とりわけ、ＷＦＳの機構においてスピーカーの数が多いことに起因し、多くの場合にＷＦＳ場面において使用される仮想の音源の数が多いことに起因する。この理由で、開発されるアルゴリズムについて、効率性が最大限に重要である。]
[0046] 波面合成システムは、従来からのマルチスピーカーシステムと比べて、正確な配置を可能にする点、及び正確な配置はまた、再現空間２１０内の種々の位置において決定できる点で有利である。]
[0047] 図６は、波面合成システムの基本的な構成を示しており、再現空間２１０に対して配置されたスピーカーアレイ２２１を示している。特に、３６０°のアレイである図６に示したスピーカーアレイは、４つのアレイ辺２２１ａ、２２１ｂ、２２１ｃ及び２２１ｄを含んでいる。例えば、再現空間２１０が船舶の艦橋である場合、前／後又は右／左に関する約束事について、船舶の前方（pre-alignment）が、再現空間２１０の部分アレイ２２１ｃが配置されている側と同じ側にあると仮定する。この場合、ここでは再現空間２１０内のいわゆる最適点Ｐに位置するユーザーが、典型的には前方を見ていると考えられる。したがって、部分アレイ２２１ａはユーザーの背後にあると考えられ、部分アレイ２２１ｄは観察者の左方であると考えられ、部分アレイ２２１ｄはユーザーの右方にあると考えられる。] 図６
[0048] すべてのスピーカーアレイ２２１が種々の個別のいくつかのスピーカー７０８を含んでおり、これらのスピーカ７０８の各々が、波面合成モジュール７１０によってデータバス７１２（図６では、概略的にしか示されていない）を介してもたらされるそれぞれのスピーカー信号ＬＳによって駆動される。波面合成モジュール７１０は、例えば再現空間２１０に対するスピーカー７０８の種類及び位置についての情報、すなわちスピーカ情報（LS info）を使用し、おそらくは他のデータも使用して、公知の波面合成アルゴリズムに従って、さらなる位置情報が関連付けられる仮想の音源（＝物体）についてのオーディオデータからそれぞれ導出される個々のスピーカー７０８のためのスピーカー信号ＬＳを計算するように構成されている。位置情報は、好ましい例としては、物体の位置を割り出すためのセンサー（例えば、レーダー）によって生成され、入力部１０５を介して波面合成モジュールへもたらされる。さらに、波面合成モジュールは、例えば再現空間２１０の空間音響の情報などを含む他の入力も受信することができる。] 図６
[0049] スピーカーを駆動するためにＷＦＳ又はＴＡＰさえも利用する実施の形態においては、いくつかの物体１００が聴覚によって異なる位置に知覚されるように、信号関連付け手段１１０は聴覚信号をいくつかの物体２００へ関連付けるように構成され、スピーカー駆動手段１２０はいくつかの物体２００の各々のためのコンポーネント信号を生成し、コンポーネント信号をまとめてスピーカー信号ＬＳを形成するように構成される。ここで、すでに説明したように、種々の物体が、聴取者にとって仮想のソース（音源）となり、又は仮想のソースとして知覚されるように、現れ得る。]
[0050] 実施の形態を、好ましい例としては、以下のように補うことができ、又は変更することができる。さらなる実施の形態においては、船舶における境界条件も考慮に入れることができる。境界条件は、好ましい例としては、報告の周波数、スピーカーの可能な位置、必要な音圧レベル、干渉音（例えば、エンジンなどからの干渉音）の特徴、及び聴覚的な表示のための駆動信号の仕様に対する要件を含む。]
[0051] これにより、データベースを使用して、船舶における典型的な空間音を考慮に入れて最適な報告信号を生成することができる。]
[0052] 実施の形態においては、音響駆動が、例えばステレオエンコーディング又は上述の波面合成などの技法を含んでいる。したがって、さまざまな技術が、船舶における試験設備（又は、艦橋及び／又は操作センターの一対一のモデル）を使用して採用される。好ましい例としては、心理音響的な実験が対応する情報をもたらすことができる。]
[0053] 実施の形態が使用する報告信号は、船舶の環境において可能な限り最良なやり方で位置決めでき、それでいて同時に最も心地良い音になる。研究室内の試験設備、艦橋及び／もしくは操作センター又は車輛内の一対一モデル、並びに心理音響的な実験がここでは有用である。]
[0054] さらなる実施の形態は、センサー並びに好ましい例としてレーダー、ソナー及び海図から得られる情報の聴覚的な表示への接続をさらに提供する。接続の重要な部分は、聴覚的な表示によって典型的に示されるべき関連の物体を選択することである。]
[0055] 要約すると、実施の形態は、好ましい例としては、以下の態様を含む。
（ａ）船舶における聴覚的な表示の使用。
（ｂ）レーダー、ソナー及び海図の聴覚的な表示への接続。
（ｃ）天気図の聴覚的な表示への接続。
（ｄ）無線ブイを船舶のための聴覚的な表示へ接続すること。
（ｅ）特に船舶及び物体（船舶、水中の障害物など）の位置、並びに相対又は絶対の速度に関する重要度に応じた物体の選択。
（ｆ）心地良く聞こえる報告信号の選択。]
[0056] 最後に、上述のシステムは、自動車においても適用可能であり、すなわち、さらなる実施の形態は車両における運転補助の対応するシステムも含む。好ましい例としては、側方から接近する車両（例えば、車線変更時）を聴覚によって知らせることができる。]
[0057] 状況に応じて、本発明の仕組みをソフトウェアにて実現することも可能であることを、指摘しておく。その実現は、電子的に読み取ることが可能であって、該当の方法を実行できるようにプログラマブルなコンピューターシステムと協働できる制御信号を有しているデジタル記憶媒体（特に、ディスク又はＣＤ）において可能である。したがって、本発明は、一般的には、コンピューター上で実行されたときに本発明の方法を実行するためのプログラムコードを機械で読み取ることができる担体上に保存してなるコンピュータープログラム製品にも存在する。換言すると、本発明は、コンピューター上で実行されたときに本方法を実行するためのプログラムコードを有しているコンピュータープログラムとしても実現可能である。]

权利要求:

請求項1
複数のスピーカー（２２０）が、該スピーカー（２２０）をさまざまに駆動することによって異なる空間的位置を聴覚によって示すことができるように空間的に異なる位置に配置されている再現空間（２１０）において、物体（２００）の位置を聴覚的に表示するための装置（１００）であって、聴覚信号を物体（２００）へ関連付けるように構成された信号関連付け手段（１１０）と、前記複数のスピーカー（２２０）のための１又は２以上のスピーカー信号（ＬＳ）を生成するように構成されたスピーカー駆動手段（１２０）と、を備えており、物体（２００）の位置を表示するための前記１又は２以上のスピーカー信号（ＬＳ）は、前記信号関連付け手段（１１０）によって物体（２００）へ関連付けられた聴覚信号に基づいており、かつ、前記１又は２以上のスピーカー信号（ＬＳ）を再生したときに前記再現空間（２１０）内に物体（２００）の位置が聴覚的に表示されるように前記１又は２以上のスピーカー信号（ＬＳ）を生成することができる装置（１００）。
請求項2
前記信号関連付け手段（１１０）への信号データベース（１４０）をさらに備えており、かつ、前記信号データベース（１４０）は、種々の物体（２００）のための種々の聴覚信号を提供するように構成されている請求項１に記載の装置（１００）。
請求項3
前記関連付けられる聴覚信号は、物体（２００）が可動であるか、静止しているかに依存する請求項２に記載の装置（１００）。
請求項4
前記信号データベース（１４０）内の聴覚信号は危険度に対応して分類されており、前記信号関連付け手段（１１０）は物体（２００）の危険度に対応して異なる分類からの聴覚信号を種々の物体（２００）へ関連付けるように構成されている請求項２又は３に記載の装置（１００）。
請求項5
より高い危険度の聴覚信号がより高いオーディオ周波数又はより高いクロック周波数を有している請求項４に記載の装置（１００）。
請求項6
高い危険度の聴覚信号がより短い距離にある物体（２００）へ関連付けられ、より低い危険度の聴覚信号がより長い距離にある物体（２００）へ関連付けられる請求項４又は５に記載の装置（１００）。
請求項7
物体（２００）が前記再現空間（２００）に対する相対速度を有しており、前記関連付けられる聴覚信号が該相対速度に依存する請求項１から６のいずれか一項に記載の装置（１００）。
請求項8
前記スピーカー駆動手段（１２０）は、前記複数のスピーカー（２２０）のためのいくつかのスピーカー信号（ＬＳ）を生成するように構成されており、前記複数のスピーカー（２２０）は、１平面内で前記再現空間（２１０）内の位置を少なくとも部分的に囲んでいる請求項１から７のいずれか一項に記載の装置（１００）。
請求項9
前記信号関連付け手段（１１０）は、物体（２００）の位置を割り出すためのセンサー（２３０）へ接続することができる入力部（１０５）をさらに備えており、該センサー（２３０）は物体（２００）の位置を前記信号関連付け手段（１１０）へ伝えるように構成されている請求項１から８のいずれか一項に記載の装置（１００）。
請求項10
前記センサー（２３０）はレーダー又はソナーを含んでいる請求項９に記載の装置（１００）。
請求項11
物体（２００）がテキスト通知によって特定され、前記センサー（２３０）は該テキスト通知を前記入力部（１０５）へ渡すように構成されており、当該装置（１００）は、該テキスト通知をオーディオ信号へ変換して前記スピーカー駆動手段（１２０）へ渡すように構成されたテキスト−トゥースピーチモジュールをさらに備えている請求項９又は１０に記載の装置（１００）。
請求項12
前記スピーカー駆動手段（１２０）は、前記再現空間（２１０）において物体（２００）の方向に位置する可能性のある唯一のスピーカー（２２０ｄ）のための唯一のスピーカー信号（ＬＳ）を生成するように構成されている請求項１から１１のいずれか一項に記載の装置（１００）。
請求項13
前記唯一のスピーカー信号（ＬＳ）は、物体（２００）の位置が変化したときに他の唯一のスピーカー（２２０）を駆動する請求項９に記載の装置（１００）。
請求項14
いくつかの物体（２００）を聴覚によって異なる位置に知覚できるように、前記信号関連付け手段（１１０）はいくつかの物体（２００）へ聴覚信号を関連付けるように構成されており、前記スピーカー駆動手段（１２０）は前記いくつかの物体（２００）の各々についてのコンポーネント信号を生成し、それらのコンポーネント信号をまとめてスピーカー信号（ＬＳ）を形成するように構成されている請求項１から１３のいずれか一項に記載の装置（１００）。
請求項15
物体（２００）の距離を所定の縮尺にて知覚できるように、前記スピーカー駆動手段（１２０）は物体（２００）の距離（ｄ）をオーディオ周波数又はクロック周波数によってエンコードするように構成されている請求項１から１４のいずれか一項に記載の装置（１００）。
請求項16
聴覚信号を聴覚によって明確に知覚できるように、前記信号関連付け手段（１１０）は所定の最小帯域幅の範囲内の聴覚信号を物体（２００）へ関連付けるように構成されている請求項１から１５のいずれか一項に記載の装置（１００）。
請求項17
前記スピーカー駆動手段（１２０）は波面合成システムを備えており、該波面合成システムは仮想の音源としての物体（２００）に組み合わせられた聴覚信号を再現するように構成されている請求項１から１６のいずれか一項に記載の装置（１００）。
請求項18
環境を走査するための装置であって、該環境内の物体（２００）の位置を割り出すためのセンサー（２３０）と、前記センサー（２３０）に接続され、前記センサー（２３０）から物体（２００）の位置を受信する請求項１から１６のいずれか一項に記載の聴覚的表示のための装置（１００）と、を備えている装置。
請求項19
前記センサー（２３０）がレーダー又はソナーを含んでいる請求項１８に記載の装置。
請求項20
複数のスピーカー（２２０）が、該スピーカー（２２０）をさまざまに駆動することによって異なる位置を聴覚によって示すことができるように空間的に異なる位置に配置されている再現空間（２１０）において、物体（２００）の位置を聴覚的に表示するための方法であって、聴覚信号を物体（２００）へ関連付けるステップと、前記複数のスピーカー（２２０）のための１又は２以上のスピーカー信号（ＬＳ）を生成するステップと、を含んでおり、物体（２００）の位置を表示するための前記１又は２以上のスピーカー信号（ＬＳ）は、信号関連付け手段（１１０）によって物体（２００）へ関連付けられた聴覚信号に基づいて生成され、かつ、前記１又は２以上のスピーカー信号（ＬＳ）を再生したときに前記再現空間（２１０）内に物体（２００）の位置が聴覚的に表示されるように前記１又は２以上のスピーカー信号（ＬＳ）を生成することができる方法。
請求項21
コンピューター上で実行されたときに請求項２０に記載の方法を実行するためのプログラムコードを含んでいるコンピュータープログラム。